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| руководитель подразделения 
| Мапавеа МУ5ОЕ и 5 ОЕ $егуег | 


Музупс. 
Попробовать 
прямо сейчас 


аипиб.сот/уапаех/тузупс 


МУЗОЕ в Яндексе 


Яндекс Директ, АдТох, 
Кинопоиск, Вертикали 


Уапаех Мападеа 5егмсе 
юг МузоЕ® 


600 ТВ -500 


сентябрь 2022 кластеров 
1000+ 1-15 
ХОСТОВ хостов в кластере 


И намного больше кластеров 
в Уапаех Соца! 


Ожидаемые 
сценарии 


Учения в дата-центрах 


Плановые работы 
на гипервизорах 


Изменения и апгрейд 
кластеров клиентами 


и неожиданные Железо под кластерами 


проблемки... Е 
е Сеть также может ломаться 


» МУуЗСОЕ полна багов 


Чего хотим достичь? 


° Доступность 0,9999 
в месяц на чтение 


° Доступность 0,9995 
в месяц на запись 


. Спокойный сон дежурного! 


‹ Легкая автоматизация 


тукое.тщезеп.ги/о09/43046802930 


Что нужно автоматизировать? 


Обязательно Желательно 

. омиспоуег ‚ Бэкапы с РИВ 

. ГаНоуег ’ Переналивка из бэкапа 
 Переналивка реплики  оегмсе О!$соуегу 


с мастера 


Какие были 
решения? 


СИНиЬ Огспезгаюг 
эеуегаттез$ Си егСогго| 
МуЗОЕ Сгоир Верйсаноп 
МНА 

Музупс! 


Музупс. 
Архитектура 


Основные ‚ Все хосты эквивалентны 
ПОИНЦИПЫ ° Идемпотентность операций 


Без потери данных! 


Архитектура СУ 
Музупс о 


гоокеерег, Еса 


Неа{И 5таги$ НеакИ 5таги$ 


Мапачдеч [оск 


в в в 
Но${1 Но${2 Но${2 


Процесс 
переключения 
мастера 


Что должна сделать НА-утилита? 


Перевести кластер в НО 
Остановить репликацию 
Выбрать лучшую реплику (*) 
Повернуть все реплики на нее 
Открыть новый мастер 


Обновить записи в ОСУ/$0 


Проверка состояния мастера 


Подход в Музупс Но есть 99 способов ошибиться 
. Наличие соединения с 0С$ . Файловая система в ВО 
е Сервер отвечает на ЗЕТЕСТ 1 . Исчерпание ресурсов 


Проблемы с 0С$ 


Синхронная 
репликация 
в МузОЕ 


епт5упс 5епт5упс 
Мачег риат № За\ме р]идт 


ПОАТА 


Впо9 | Ч 
Редо . «и, 
Риитагу 
5ептт5упс 
Заме рат 
В 


о 


Кворум 


М +Н=мМ+1 


’ М — число хостов в кластере 


. \М/ — число хостов, на которых была 
записана транзакция 


е НВ — СКОЛЬКО ХОСТОВ ДОЛЖНО ВЫЖИТЬ 


В МУЗОЕ 


° \М/=1+гр| сет! зупс_таф%ег майК_Тог_$ауе_ соци 


Каскадная репликация 
и приоритеты 


Режим тантепапсе 


В режиме тащепапсе Нужно 

отключает синхронную для ручных работ 
репликацию на кластере 

. не делает никаких . В процессе изменения 
изменений кластера 


праеоргот.ги/оегоразпозИпе-мега|-иб&-гпак.Р{т! 


Переналивка реплик 


Музупс 


. Проверяет необходимость 
{оисп/\маг/гип/тузупс/тузупс.гезефир 


Внешняя автоматика 


2 ЕО 

> у и 

. Проверяет наличие файла к 

° Переналивает инстанс туза! ни ^=- эВ к 
‚‹ удаляет тубупс.гезетир 


праеоргот.ги/оегоразпозИпе-мега|-иб&-гпак.Р{т! 


Что имеем Если всё идет хорошо 
в результате 
10-20 с 


омШспо\уег 


1-2 мин 


ЕаНоуег 


° Без потери данных 


. Последовательная деградация 
М —> 1 хост 


Как все испортить? Что плохого может сделать 
пользователь СУБД ? 


‚ Большие транзакции 
‚ Отстающие реплики 


 Ненадёжная конфигурация МуЗОЕ 


Но мы будем разумными 


Ве${ ргасйсе$ Настройки МузОЕ 


° Правильные индексы в таблицах ° заме_го\м/_зеагсй_а|вогИйт$ = 
МОЕХ_5САМ,НА$Н_$5САМ 


’ Небольшие транзакции 
. 5|ауе_рагаПе| туре = 1ОС1САЕ_С1ОСК 


. Реопте-5спета-сПпапёе 
. 5|ауе_рагаЙе| м/огКег$ = 8 


| — | м | р 5 м 
1 } РР _ Ч“ 
А` | `` д м а а Е 
\ у у ] \ 1 } 7 1 < Й р | . . 
р у Я Я А 1 р [ ь р _ \ \ у 7 р р : 
\ 1 й у у м ж, й 1 у В 1 ) 7 а 
й р ] Я й о у у — у \ \ ) 7 | | 
\ \ } 7 \ $ Г < \ \ \ } } 
М | А у | \ } | \ и | | в 
1 у й 1 у Я А ч р’ 7 \ ‚| | ‘ 
1 й А 7 Ч Ц р р’ \ 7 | т. —_ р 


Как попробовать? 


Скачать 


2{ с1опе 2к@=КПиБ.сот:уапдех/тузупс.е 


Собрать 


го риПА -о тузупс ./стЧ/тузупс/... 


Настроить Музупс 


Та|оуег: {гие 
та|йомег_соо|4о\/т: 3600$ 
тТа|омег_ае|ау: 60$ 
гоокеерег: 
патезрасе: /туза/туси$ег_1 
По${5: 
- тК-АБаа$021.46.уапаех.пе{ 


- тК-АБаа$02П.АБ.уапдех.пет 


- тК-АБаа$02К.4Б.уапдех.пе{ 
ту$а1: 

изег: аатт 
ра$$\мгога: ****** 
роц: 3306 
герИсайоп_рот: 3306 
герИсайоп_иег: гер| 
герЙсаНоп _ра$$\м/ога: ****** 


Настроить МуЗОЕ 


# репликация 


Бп[о2_Тогта* = КО\М/ 
2на_тоде = ОМ 
ептогсе_24_сопу1${епсу = ОМ 
|10=_$1ауе _ирЧае$ = ОМ 


# сохранность данных 


ппоЧб_Ни$П_|о5_ а _4гх_сотти = 1 
упс 6110$ = 1 


# избегаем зр\-огаш 


геаЧ_опу = ОМ 
ирег геаа_опу = ОМ 
оте_тоде = ОМ 


Использовать 


# собрать первоначальную конфигурацию руками 


# сообщить Музупс о хостах 

$ тузупс По${ а@4 по4е1.аБ.уочг.рго]есе.сот 
$ тузупс По${ а@4 поде2.а6.уочг.рго]есе.сот 
$ тузупс По${ а@4 подеЗ.аБ.уоцг.рго]есе.сот 
# посмотреть информацию 


$ тузупс ШЮ -5 


# переключить мастер 
$ тузупс $м/(сИ --0 поде2 

$ тузупс $м/КсИ --гот поде2 
# тащепапсе 


$ тузупс тай оп | ой 


что еще умеет «Починка» кластера 


Музупс?? о Управление свободным 
местом 


Закрытие отстающих реплик 


мсюйпох.ги/ 


Какие планы ‚ Поддержка каналов 


развития? репликации 
. Поддержка Мапа) В 


° Поддержка Еса 
. ШЮОМуфупс, АРТ? 


Дмитрий Смаль 7 


№ р / | 
| Руководитель подразделения Мапавеа | 
МУ5аи и >С бегуег | 
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Гоа4** Яндекс 


| 
| | 


| | | | | | 
| | 


| | 
| Обратная связь 
и комментарии 
к докладу по ссылке” 


